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摘 要 : 


[目的 /意义 ] 为 探讨 论文 层面 学 术 规 范 化 引用 影响 力 指标 ,对 基于 共 引 网 络 识别 研究 领域 的 引文 评价 方法 Rela- 
tive Citation Ratio( RCR) 的 有 效 性 进行 分 析 。[ 方 法 /过 程 ] 选 取 iCite F1000 \InCites 数据 库 , 以 739 604 篇 文献 为 
样本 ,采用 及 语言 对 RCR 与 基于 先 验 分 类 的 Category Normalized Citation Impact( CNCI) 、 期 刊 影响 因子 (JIF) 等 进 
行 相 关 分 析 , 以 检验 RCR 在 学 术 影 响 力 评价 中 的 有 效 性 。[ 结果 /结论 ]RCR 与 CNCI 高 度 相关 、 与 JIF 弱 相 关 , 因 
此 表明 RCR 与 CNCI 具有 相似 性 与 差异 性 ,并 揭示 了 其 在 践 行 (旧金山 宣言 ) 、 摆 脱 “ 以 刊 评 文 ”方面 的 可 操作 性 ; 
交叉 科学 中 RCR JIF 相关 度 与 学 科 交 又 数目 的 反 变 关系 以 及 RCR 与 JIF 相关 度 低 于 单一 学 科 的 结果 ,揭示 了 
RCR 在 交叉 科学 论文 学 术 影 响 力 评价 中 具有 一 定 的 适用 性 与 有 效 性 。 因 此 ,RCR 借助 共 引 网 络 识别 研究 领域 的 
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算法 为 论文 影响 力 评价 ,特别 是 为 交叉 科学 研究 成 果 的 评价 提供 了 新 的 解 题 思 
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5 大 知 ,引用 被 视 作 科学 评价 建制 中 衡量 学 术 影响 力 
天 码 "  。 然 而 , 偏 态 性 是 引用 的 特质 , 即 由 于 引用 密 
(itation density ) 的 差异 ,被 引 频次 (Times Cited, fi 
称 开 ) 依 学 科 、 出 版 年 .文献 类 型 呈 高 度 偏 态 分 布 。 
197.45 FE. Garfield 博士 即 指出 :不 同学 科 的 原始 被 引 
频 演 不 能 直接 进行 比较 中 。 自 2012 年 ,在 欧洲 负责 任 
计 蕊 浪潮 的 冲击 下 ,鉴于 不 同学 科比 较 之 需 , 规 范 化 引 
用 办 标 算法 成 为 研究 的 重心 。 本 文 对 2016 年 B. I 
Hutchins 等 提出 的 学 科 规 范 化 引文 影响 力 指标 , 即 基 
于 共 引 网 络 界定 研究 领域 的 Relative Citation Ratio ( 相 
对 引用 比 ,简称 RCR) 进行 分 析 ” ,以 期 为 论文 学 术 影 
响 力 评价 实践 ,特别 是 为 交叉 科学 研究 成 果 的 评价 提 
供 借鉴 与 参考 。 


1 研究 背景 


1986 年 ,匈牙利 著名 文献 计量 学 家 A. Schubert 和 
T. Braun 基于 文献 耦合 的 概念 提出 建立 论文 跨 学 科比 
较 的 规范 化 指标 “”。 德 国 马 普 学 会 的 文献 计量 学 家 
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L. Bornmann 则 指出 : 当 且 仅 当 规范 化 处 理 后 , 跨 学 科 、 
跨 时 间 引 文 影响 力 比 较 方 可 实施 ”。 根 据 荷兰 莱 顿 大 
L. Waltman 教授 等 的 观点 :规范 化 目的 在 于 消除 学 
科 因 素 给 科学 评价 带 来 的 噪音 ”。 因 此 通过 规范 化 校 
正 科学 评价 实践 中 不 同学 科 的 引用 差异 成 为 学 术 界 的 
共识 。2012 - 2015 年 间 , 《关于 科研 评价 的 旧金山 宣 
言 》( 简称 旧金山 宣言 ) 《文献 计量 学 :科研 评价 十 原 
则 莱 顿 宣言 》( 简称 莱 顿 宣言 ) 英国 《计量 潮 : 研 究 评 
价 和 管理 指标 作用 的 独立 审查 报告 》( 简称 计量 潮 报 
告 ) 接 中 而 至 ,进一步 催化 了 学 科 规 范 化 引文 影响 力 等 
指标 的 开发 。L. Waltman H. F. Moed .L. Leydesdorff, 
L. Bornmann 等 学 者 提出 诸多 算法 , 科 害 唯 安 与 爱 思 唯 
尔 则 分 别 推 出 基于 先 验 分 类 的 CNCI( Category Normal- 
ized Citation Impact) , FWCI ( Field-weighted citation im- 
pact )”“” 。 其 中 CNCI 计算 公式 为 : 单 篇 论文 的 实际 
被 引 次 数 除 以 同文 献 类 型 . 同 出 版 年 .同学 科 领 域 的 期 
望 被 引 频 次 。 

2016 年 ,美国 国立 卫生 研究 院 (NIH) 的 B. I 
Hutchins 等 基于 A. Schubert $U T. Braun 的 研究 ,提出 
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建立 在 共 引 (co-citation ) 网 络 基 础 之 上 的 RCR ,以 通过 
共 引 网 络 提供 的 时 间 与 空间 测度 识别 论文 学 科 领 域 ， 
即 为 了 量化 出 版 物 X 的 影响 ,确定 与 X 共同 被 引用 的 
所 有 出 版 物 ,并 将 其 视 作 X 的 领域 。 其 计算 公式 为 文 
章 引 用 率 ACR 与 预期 引用 率 ECR 之 比 ,而 ACR Hie 
文 被 引 频 次 除 以 发 表 年 限 ,ECR 为 通过 回归 计算 的 文 
献 期 望 引用 率 " 。 

RCR 的 出 现 引 起 了 学 术 界 的 极 大 关注 。 在 实践 层 
面 ,NIH 以 及 科学 数据 平台 Dimensions 采用 了 该 指标 ; 
英国 惠 康 基金 会 .意大利 Fondazione Telethon 两 大 生物 
医学 资助 机 构 尝 试 利用 RCR 分 析 其 基金 投资 方案 和 
结果 。 与 此 同时 ,一 些 文献 就 其 应 用 进行 了 验证 和 
探索 。 其 中 ,2019 年 爱 思 唯 尔 A，Purkayastha 等 基于 
RER 与 FWCI 的 相关 性 尝试 将 其 扩展 到 生物 学 以 外 的 
领域 ”。2020 年 瑞士 伯尔尼 大 学 预防 医学 研究 所 的 
SSteck 等 基于 相关 分 析 探讨 了 在 论文 影响 力 评 价 中 


) 到 年 ,美国 匹 效 堡 大 学 医学 中 心 研究 人 员 通过 中 位 
BUG LET RCR 在 湖 柱 神经 外 科 ,神经 外 科 文 献 
评价 中 的 有 效 性 """。 在 理论 层面 ,B. I. Hutchins 等 在 
天 颖 该 指标 的 同时 ,通过 RCR 与 专家 同行 评议 结果 、 
MEDS( 标准 化 引文 比 ) .SNCS( 源 标准 化 引用 分 数 ) 等 
色 祭 的 相关 分 析 进 行 了 测试 ,并 得 出 结论 :RCR 在 技术 
各 用 性 方面 比 现 有 的 基于 引用 的 指标 具有 优势 。 
L> Waltman 则 通过 研究 指出 该 指标 理论 模型 及 方法 的 
透 盏 性 尚 存 欠缺 o L. Bornmann 等 以 相关 分 析 得 出 


18 个 月 内 RCR 指标 的 不 稳定 性 ,并 兼顾 文献 发 表 后 2 
至 3 年 被 引 统计 区 间 。 数 据 采集 过 程 如 下 :中 在 iCite 
开源 数据 包 中 下 载 . 拆 分 2017 年 1 068 541 篇 论文 
DOI RCR 载体 期 刊 SSN;@ 在 2020 年 版 JCR 中 采集 
2017 年 期 刊 12 873 种 , 因 含 687 种 重复 期 刊 ( 刊 名 、 
ISSN 均 相 同 ) ,去 重 获得 期 刊 12 186 种 ;@ 以 ISSN 为 
查找 值 ,利用 VLOOKUP 函数 对 中 、@@ 进 行 精确 匹配 ， 
获得 期 刊 5 721 种 ;@@ 以 5 721 条 ISSN 为 检索 字段 在 
InCites 中 检索 获得 论文 DOI、CNCI 及 其 载体 期 刊 JIF 
等 指标 ;( 引 通过 DOL 将 中 .由 检索 结果 进行 匹配 ,去 除 
无 效 数据 ,获得 739 604 篇 论文 DOL .RCR CNCI, TC, 
JIF ,并 依据 惯例 按照 WoS( Web of Science) 中 载体 期 刊 
的 分 类 对 论文 进行 归 类 ,其 中 含 交 叉 学 科 期 刊 ( 具 有 多 
个 分 类 标签 ) 论文 337 476 篇 ,单一 学 科 论 文 402 128 
篇 ,以 用 于 分 析 ;@@O 借 助 数据 爬虫 Web Scraper ,通过 在 
线 同行 评议 系统 F1000 EHR 2017 年 10 199 篇 论文 同 
行 评议 分 值 ,并 加 权 计 算 专 家 评分 FFa;@ 以 DOI 匹配 
@@ 结 果 , 获 得 7 963 篇 文献 FFa、RCR .CNCITC JIF， 
其 中 交叉 学 科 期 刊 论 文 2 739 篇 ,单一 学 科 期 刊 论文 
5 224 篇 ,以 用 于 进一步 分 析 。 

基于 上 述 数据 ,本 文 尝试 分 析 以 下 问题 : 

(1)RCR 与 CNCI 的 共性 与 个 性 ,以 凸显 RCR 理 
论 上 的 先进 性 ; 

(2)RCR 5 JIF 的 相关 性 ,以 分 析 RCR 在 论文 影 
响 力 评价 实践 中 的 应 用 ; 

(3)RCR 在 F1000 中 的 表现 , 据 此 对 RCR 在 表征 


ROR 与 学 科 领 域 百 分 位 等 规范 化 指标 高 度 相 关 、 而 与 
专 轿 同 行 评议 分 值 低 度 相关 的 结论 ,并 对 看 似 复 杂 的 
讽 范 化 过 程 以 及 研究 领域 的 定义 表示 担忧 汪 。2020 
年 ,芬兰 于 韦 斯 届 莱 大 学 (Jyvaskyla) 开放 科学 中 心 的 
J. T. Seppänen 对 RCR PER TE 。 人 德国 UberRe- 
search 公司 认为 RCR 在 跨 学 科 评 价 方 面 迈 出 了 重要 一 
步 , 同 时 指出 该 指标 尚 需 改 进 , 以 进一步 验证 其 有 效 
性 ” 。 国 内 陈 斯 斯 等 认为 RCR 具有 一 定 的 先进 性 ,并 
指出 需要 对 其 可 靠 性 、 效 度 进行 进一步 验证 '”。 可 
见 ,RCR 虽 在 一 些 医学 系统 中 有 所 采用 ,但 是 其 有 效 性 
仍 需 进一步 探索 ”。 本 文 将 就 此 作出 分 析 , 并 就 其 在 
交叉 学 科 中 的 应 用 进行 前 述 。 


2 RCR 与 典型 评价 指标 的 差异 性 统计 分 析 


2.1 数据 采集 与 处 理 
本 文选 取 iCite F1000 .ImCites 数据 库 用 于 统计 与 
分 析 。 其 中 统计 年 限 确定 为 2017 年 ,以 避免 文献 发 表 
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交叉 学 科 论 文 影 响 力 方面 的 有 效 性 作出 判断 。 
2.2 RCR、CNCI、TC、JIF 相关 性 分 析 

数据 KS 检验 (过 程 从 略 ) 表 明 , 显 背 性 水 平 小 于 
0.05 ,因此 不 符合 正 态 分 布 ,以 采用 对 偏 态 数据 集 具有 
修补 功能 的 斯 皮尔 曼 相关 系数 为 宜 。 图 1 为 739 604 
篇 论文 RCR CNCITC JIF 斯 皮尔 曼 相关 分 析 结 果 , 表 
1 为 交叉 学 科 与 单一 学 科 中 CNCI RCR 与 TC JIF 相关 
度 对 比 。 

图 1 数据 分 析 显 示 ,739 604 篇 论文 RCR 与 CNCI 
相关 系数 为 0.77 ,与 TC 相关 系数 为 0. 82, 与 JIF 相关 
系数 为 0.20。 表 1 数据 则 表明 ,无 论 是 337 476 篇 交 
又 学 科 论 文 还 是 402 128 篇 单一 学 科 论 文 , 就 与 单 篇 论 

影响 力 指 标 RCR、CNCI 相关 度 而 言 ,JE 明显 低 于 
TC; 同 时 ,与 RCR 相 比 ,CNCI 与 TC JIF 等 引用 指标 具 
有 更 高 的 相关 度 。 

2.3 F1000 中 RCR 表现 分 析 
F1000 中 5 224 篇 单一 学 科 论文 、2 739 篇 交叉 学 
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图 1 RCR、CNCI、TC、JIF 相关 分 析 散 点 图 


R1 CNCI、RCR 与 其 他 指标 相关 度 对 比 


T 样本 数 指标 与 TC 相关 度 KER JIF 相关 度 
量 / 篇 CNCI 与 TC RCR 与 TC CNCI 与 JF RCR 与 JIF 

单一 学 科 402 128 0.881 0. 835 0.343 0. 203 

交叉 学 科 337476 0.900 0. 807 0.323 0. 205 


BURCH A AH IG HEA AS 2 所 示 ; 交 叉 学 科 论 文 不 同 第 
选 保 指标 相关 度 如 表 3 所 示 : 


SS. a oY | as | dete 5. = 

oF 交叉 学 科 与 单一 学 科 不 同 筛选 集 指 标 相 关 度 

© RCR 与 JIF RCR 与 CNCI 

BERETA BEAR PE - - : 
ar 交叉 学 科 ”单一 学 科 ”交叉 学 科 ”单一 学 科 

© 样本 总 体 0.443 0.519 0. 888 0.895 

GD 

CN RCR =3 0.292 0.416 0. 728 0.798 

© JIF >=28 0.035 0.291 0. 869 0.875 

CNRcR>3 H JIF >28 0. 030 0.279 0. 824 0. 849 
> va n _ 

— 表 3 交叉 学 科 论文 不 同 筛选 集 指 标 相 关 度 

v 

WARE PRS CNC 与 JIF RCR 与 JIF 
CELPA 2739 0. 523 0.443 

AERP UBC Ay 2 1 903 0.558 0.481 

es 

有 学 释 交 叉 数目 为 3 742 0.442 0.358 

a 数目 为 

学 科 交 又 数 目 为 4 75 0.331 0. 242 


1 及 表 2、 表 3 中 F1000 PEZ EMA E ERA 
析 结 果 表明 :CDF1000 中 单一 学 科 、 交 义学 科 RCR 与 亚 
相关 度 均 高 于 739 604 篇 论文 样本 总 体 , 其 中 样本 总 体 为 
0.2, 交 叉 学 科 为 0. 443 ,单一 学 科 为 0. 519;@ 交 叉 学 科 
RCR 45 JIF RCR 与 CNCI 的 相关 度 显著 低 于 单一 学 科 ;(3) 
以 学 科 交叉 数目 为 筛选 条 件 的 情形 下 ,RCR CNCI 与 JIF 
相关 度 皆 呈 反 变 关系 ,其 中 交叉 2.3 4 个 学 科 的 论文 样本 
中 RCR 与 JIF 相关 度 依次 为 0.481.0.358 .0.242 ,CNCI 与 
JIF 相关 度 依次 为 0.558 .0.442 0.331。 


3 RCR 用 于 科学 评价 的 有 效 性 分 析 
依据 上 述 统计 分 析 结 果 , 本 文 将 通过 RCR 与 


3.1 RCR 设计 思想 具有 一 定 的 先进 性 

这 里 将 通过 RCR 与 CNCI 设计 思想 的 对 比分 析 说 
明 RCR 在 理论 上 的 先进 性 。739 604 篇 论文 RCR 与 
CNCI 相关 系数 为 0.77。 依 据 相关 性 判定 标准 ,二 者 哇 
中 度 正 相关 , 即 两 个 变量 变化 方向 相同 ,由 此 表明 二 者 
在 论文 学 术 影 响 力 评价 上 的 相似 性 。 从 根本 上 说 ， 
CNCI 与 RCR 作为 TC 的 衍生 指标 , 均 根植 于 引用 
有 引用 的 基因 ;并 且 二 者 均 以 分 类 为 基础 进行 指标 的 
规范 化 ,以 校正 引用 的 学 科 偏 态 分 布 。 因 此 ,从 本 质 上 
说 ,RCR 与 CNCI 具有 同 源 性 ,因而 评价 效果 上 具有 一 
定 的 相似 性 。 

同时 ,鉴于 引用 作为 学 术 影 响 力 的 可 量度 指标 已 
成 学 术 界 的 共识 ,并 且 RCR 与 TC Œ 0. 82 的 高 度 相 
关 , 间 接 证 明了 RCR 在 科学 评价 中 具有 一 定 的 价值 性 
与 有 效 性 。 

然而 ,根据 加 拿 大 多 伦 多 大 学 G，Eysenbach 教授 
的 研究 :相关 不 能 诠释 为 比例 , 即 尽 管 相关 系数 r+=1 


意味 着 X 和 YY 之 间 存 在 100% 的 可 完全 预测 函数 关 


H 
> TH 


系 , 但 是 相关 系数 0.5 并 不 意味 着 两 个 变量 间 预 测 的 
准确 度 为 50% , 而 是 0.25 或 23% , Bl r = 0.5° = 


0.25'! 。 那 么 ,RCR 与 CNCI 的 可 预测 性 为 59.3% 。 即 
相似 是 共性 与 个 性 的 矛盾 统一 体 。 事 实 上 ,上 述 图 表 
亦 体现 了 RCR 与 CNCI 具有 一 定 的 差异 性 , 亦 即 二 者 
存在 论文 所 属 学 科 领 域 界定 标准 的 不 同 。 

CNCI 系 排 除 出 版 年 .学 科 领 域 与 文献 类 型 影响 的 
无 偏 影响 力 指标 ,也 就 是 说 ,根据 特定 标准 ( 先 验 分 
类 ) 自动 或 人 为 地 将 研究 成 果 贴 上 标签 是 该 指标 算法 
的 大 前 提 。 因 此 ,CNCI 建立 在 可 操作 的 学 科 分 类 系统 
之 上 ,并 具有 对 于 学 科 分 类 的 依附 性 与 敏感 性 ”。 那 
么 ,首先 必须 对 学 科 的 内 涵 和 外 延 做 出 清晰 的 界定 , 然 
而 学 术 共 同体 恰恰 尚未 就 此 达成 共识 。C. R. Sugimo- 
to 5j S. Weingart 在 《千变万化 的 学 科 》 中 从 认 知 、 社 


= 
jil 


会 ,交流 与 制度 等 各 个 维度 对 学 科 进 行 了 解读 。 法 


CNCI JIF 等 指标 的 相关 分 析 , 从 理论 与 实践 两 方面 曾 
述 RCR 在 科学 评价 中 的 有 效 性 。 


E] 


计量 学 家 M. Zit 则 断言 :并 不 存在 对 学 科 定 义 的 最 
JEFE, W InCites 为 例 , 其 中 包括 ESI ( Essential 
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宋 丽 萍 ， LEF, AHE, F. 以 共 引 网 络 识别 研究 领域 的 引文 评价 方法 有 效 性 分 析 []]. 图 书 情报 工作 202163 (239 10 


=105. 


Science Indicators) „WoS .澳大利亚 ERA 英国 RAE, EG 
By FAPESP 联合 国教 科 文 组 织 Frascati 等 9 种 学 科 分 
类 体系 ,那么 从 ESI 宽泛 的 22 个 学 科 分 类 到 WoS 下 属 
的 255 个 类 目 , 丝 可 谓 之 为 学 科 。 因 此 ,游离 的 学 科 定 
义 使 CNCI 的 算法 受到 制约 ,同时 逐渐 显 化 的 交叉 学 科 


果 依 据 影响 因子 认同 论文 影响 力 及 其 质量 , 则 意味 着 
忽略 了 93.6% 发 表 在 影响 因子 较 低 期 刊 上 而 自身 影 
响 力 较 高 的 论文 ,反之 夸大 了 71.86% 发 表 在 影响 因 
子 较 高 期 刊 上 而 自身 影响 力 较 低 的 论文 。 因 此 ,科学 
共同 体 在 《旧金山 宣言 > 中 发 出 将 论文 影响 力 与 期 刊 


研究 范式 使 论文 在 非 此 即 彼 的 学 科 分 类 体系 中 倍 受 
因 。 更 何况 ,论文 通常 依据 载体 期 刊 的 分 类 进行 归 类 ， 
而 交叉 学 科 期 刊 的 归属 从 来 就 是 期 刊 分 类 的 难点 。 虽 
然 对 于 交叉 学 科 论文 ,CNCI 采用 各 学 科 均 值 予 以 修 
正 ,但 因 将 论文 在 各 学 科 中 的 份额 等 同 视 之 而 模糊 了 
其 重心 。 因 此 ,分 类 法 的 唯一 性 与 文献 主题 多 维 性 悖 
论 的 碰撞 使 CNCI 算法 的 缺陷 更 为 凸显 。 
RCR 立足 于 共 引 网 络 与 科学 结构 之 间 的 揭示 与 
被 揭示 关系 , 意 在 描述 某 一 时 间 点 的 静态 结构 的 同时 ， 
通 直 不 同时 间 点 的 历时 变化 描述 学 科 进 化 的 轨迹 ,从 
TE 释 科 学 研究 的 格局 及 其 演化 历程 ""。 这 种 动态 
年 到 研究 领域 的 方式 扬弃 了 1986 AF A. Schubert $1 T. 
Bfanh 基于 文献 耦合 提出 的 相对 引用 比 ” ,打破 了 传统 
排 钢 性 学 科 分 类 的 边界 ,契合 了 交叉 学 科研 究 范式 , 因 
而 使 RCR 具有 了 一 定 的 理论 先进 性 。 
3@) RCR 对 高 质量 论文 具有 较 高 的 识别 度 
CN 各 图 1 所 示 ,RCR 与 JIF 相关 系数 为 0.2, 呈 弱 相 
R1 则 表明 交叉 学 科 与 单一 学 科 中 ,二 者 相关 度 显 
HART TC 与 RCR 相关 度 ,由 此 说 明 JIF 与 单 篇 论文 影 
响 放 的 背离 。 事 实 上 ,20 世纪 后 半 叶 ,JIF 被 异化 为 论 
文 属 量 的 代名词 ,并 如 万 能 标签 般 被 赋予 期 刊 中 的 每 
一 短文 章 ,因此 弱化 了 同一 期 刊 中 不 同 论文 的 差异 。 
然而 ,RCR 与 JIF 的 弱 相 关 及 下 述 统计 分 析 佐证 了 JIF 
与 轮 文 影响 力 的 不 等 价 性 。 统 计 表明 ,739 604 篇 论文 
样本 中 , RCR 值 从 0 到 1 078. 68, JIF 从 0. 073 到 
292.278。 以 28 为 JIF BE ,样本 总 体 中 源 自 高 影响 
力 期 刊 (JF>28 ) 的 论文 为 12 384 篇 , 占 样 本 总 体 的 
1.67% ,对 应 RCR 值 从 0 到 1 078.68 ,其 中 RCR 中 位 
数 为 0.46,IQR( 四 分 位 数 间距 ) 为 (0 -3.68) ,JIF 中 位 
BA 42.78 ,IQR 为 (33.65 -45.54) 。 如 果 根 据 知 名 期 
刊 上 文章 RCR 均值 约 为 3 的 标准 ,以 3 为 阔 值 ,对 应 
论文 为 54 376 篇 , 占 样本 总 体 的 7.35% ,期 刊 影响 因 
子 从 0.592 到 292.278 ,其 中 RCR 中 位 数 为 4.27,IQR 
为 (3.48 -5.97) ,JIF 中 位 数 为 3.64,IQR 为 (2.47 - 
5.68) .两 种 筛选 情形 下 RCR JIF 中 位 数 的 对 比 进 一 
步 凸 显 了 RCR 与 JE 的 背离 。 进 而 ,以 二 者 之 交集 , 即 
以 RCR 为 3 以 上 并 且 载 体 期 刊 JE 为 28 及 以 上 为 条 
件 进行 进一步 第 选 ,获得 论文 3 485 篇 , 占 54 376 篇 文 
献 的 6.41% 12 384 篇 论文 的 28.14% 。 具 体 地 说 ,如 


影响 因子 剥离 的 呼声 ” 。 然 而 在 《旧金山 宣言 》 与 现 
今 评价 体系 长 达 八 年 的 博弈 中 ,尽管 英国 帝国 理工 学 
院 结构 生物 学 家 S. Curry 教授 代表 宣言 指导 委员 会 公 
布 了 《旧金山 宣言 实施 路 线 图 》; 爱 思 唯 尔 等 机 构 已 经 
签署 该 宣言 ;奥地利 科学 基金 会 .法国 国家 研究 局 、 欧 
盟 委员 会 的 科技 政策 中 业已 嵌入 该 原则 ,但 是 并 没有 
改变 根深 蒂 固 的 科学 评价 体系 ,因为 基于 JIF 的 奖励 
机 制 已 经 植 入 学 术 评 价 体系 的 中 枢 , 学 术 生 态 系 统 要 
素 之 研究 人 员 ,论文 ,期刊 JIF 已 如 俄罗斯 套 娃 般 被 向 
套 其 中 ”。2020 年 2 月 《自然 ?发 布 的 题 为 (中 国 禁 
止 对 发 表 论 文 进行 现金 奖励 》 的 新 闻 报 道中 指出 :在 
SCI 至 上 的 激励 机 制 下 ,中 国 SCI 论文 发 文 量 从 2009 
年 的 约 12 万 篇 增加 到 2019 年 的 45 万 篇 ,并 因此 引发 
研究 质量 下 降 以 及 论文 唱 守 ,学术 造假 等 学 术 不 端 。 
目前 科技 部 和 教育 部 联合 推出 新 政 ,以 消除 “出 版 或 者 
tH Jay” (Publish or Perish) 等 不 良 驱动 因素 ,但 现行 评价 
体系 的 蔡 代 方案 , 即 科学 评价 中 的 “ 破 与 立 ” 仍 在 探索 
zp, 

从 这 一 意义 上 说 ,与 JIF 相 比 而 言 ,RCR 对 高 质量 
论文 具有 较 高 的 识别 度 。 那 么 ,NIH 计量 分 析 办 公 室 
主任 C. Santangelo 所 谓 “ 不 论 论文 发 表 于 何 处 , RCR 
均 能 将 有 影响 力 的 论文 识别 出 来 "的 初衷 为 践 行 4《 旧 
金山 宣言 》. 摆 脱 * 以 刊 评 文 ? 提 供 了 新 的 路 径 ” 。 

3.3 RCR 在 交叉 学 科 论 文 评 价 中 具有 一 定 的 适用 性 

这 里 将 就 表 2、 表 3F1000 数据 分 析 结 果 加 以 阐述 。 

(1) 从 根本 上 说 ,“ 开 发 论文 评价 中 JE WREE 
RIR” Æ V. Tracz 设计 F1000 的 初衷 ,因此 ,新 近 改 
版 的 Faculty Opinions( 原 F1000Prime) 中 在 显示 学 科 领 
域 百 分 位 、 专 家 同行 评议 分 值 的 同时 ,呈现 了 论文 的 
RCR。 而 就 7 936 个 样本 总 体 而 言 ,FFa 与 CNCI 相关 
度 为 0. 194 ,与 RCR 的 相关 度 为 0.147。 因 此 ,依据 
《 莱 顿 宣言 》 中 同行 评议 的 首位 原则 ,此 结果 表明 RCR 
尚未 完全 达到 预期 。 这 一 结果 一 定 程度 上 伍 证 了 工 . 
Bornmann ,L. Waltman 的 疑虑 -和 。 

(2) 表 2 交叉 学 科 中 RCR 与 CNCI 相关 度 低 于 单 
一 学 科 的 结果 表明 ,RCR 与 CNCI 的 差异 主要 体现 在 
交叉 学 科 。 

(3) 表 3 显示 ,交叉 学 科 中 无 论 是 RCR 抑或 是 
CNCI, 随 着 学 科 交 叉 数 目的 增多 ,与 IF Se BE PF 
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降 趋势 。RCR( 或 CNCI) JIF 相关 度 与 学 科 交 叉 数 目的 
反 变 关系 以 及 RCR 与 JIF 相关 度 低 于 单一 学 科 的 结果 ， 
一 定 程度 上 契合 了 交叉 学 科 不 同学 科 知 识 体系 相互 渗 
透 .融合 的 特征 ,凸显 了 交叉 学 科 中 论文 影响 力 与 JEF 的 
深度 剥离 ,因此 表明 ,RCR .CNCI 比 JIF 更 具 识别 度 。 

(4) 交叉 学 科 中 RCR 与 JIF 的 相关 度 低 于 CNCI 
与 JIF 相关 度 的 结果 进一步 显示 RCR 在 交叉 学 科 论文 
学 术 影 响 力 评价 中 具有 更 高 的 区 分 度 , 因 而 其 适用 性 
与 有 效 性 优 于 CNCI。 

(5 ) 对 样本 总 体 JIF>28 的 12 384 篇 论文 数据 集 
的 深度 分 析 亦 表明 RCR 对 于 交叉 学 科 论文 具有 较 好 
的 识别 度 。 其 中 ,RCR 与 JIF 相关 度 为 0.087 ,单一 学 
科 为 0. 117 ,而 交叉 学 科 为 - 0. 092, RCR 中 位 数 为 
0.46, 同 一 数据 集 交 叉 学科 CNCI 与 IF 相关 度 为 
05022 ,CNCI 中 位 数 为 1.799。 负 相关 的 结果 进一步 
了 交叉 学 科 中 RCR .CNCI 与 JIF 的 相左 ,而 较 高 
‘bites 中 较 低 的 RCR bon RCR 与 


Hy 


> 就 739 604 篇 样本 总 体 而 言 ,RCR 与 CNCI 具有 高 
关 性 ,同时 本 文 分 析 亦 表明 :RCR 与 专家 评议 结 
相关 度 低 于 CNCI, 因 此 ,RCR 不 具 显 车 优势 ; 然 
De 有 路 而 言 ,CNCI 为 代表 的 先 验 方法 虽 比 较 简 
ef 易于 理解 ， a tion 
境 宁 用 共 引 网 络 动态 仿 识别 研究 领域 的 RCR 算法 为 纠 
正 学 科 差 异 提供 ee. 
4.2 与 JIF 相对 而 言 ,RCR 对 于 高 质量 论文 具有 较 
高 的 辨识 度 
样本 中 JIF S28 RCRS3 筛选 数据 集 RCR 与 JIF 
相关 分 析 、 中 位 数 的 比较 验证 了 JIF 与 单 篇 论文 影响 
力 的 背离 ,显示 了 RCR es. 识别 
度 。 因 此 ,RCR 为 践 行 (旧金山 宣言 》 提 供 了 新 的 可 操 
作 性 工具 , 即 S，Bertuzzi HA “RCR 有 助 于 走出 “以 刊 
评 文 "的 沼泽 地 带 ”” 。 
4.3 RCR 在 交叉 学 科 论 文学 术 景 
定 的 适用 性 与 有 效 性 
与 CNCI 比较 而 言 ,F1000 交叉 学 科 数 据 集中 RCR 、 

JIF 相关 度 与 学 科 交 叉 数 目的 反 变 关系 、RCR 与 JIF 相 
关 度 低 于 单一 学 科 的 结果 以 及 样本 总 体 SIF S28 筛选 数 
据 集中 交叉 学 科 RCR 与 JIF 负 相 关 的 结果 ,揭示 了 RCR 


响 力 评价 中 具有 一 


在 评价 交叉 学 科 论文 学 术 影 响 力 方面 的 优势 。 

同时 ,应 该 说 明 的 是 ,RCR 仍 存在 一 定 的 局 限 性 。 
首先 ,由 NIH 开发 的 这 一 指标 目前 主要 应 用 于 生物 学 、 
医学 领域 ;其 次 ,虽然 RCR 具有 设计 思路 的 优势 ,然而 
目前 尚未 完全 达到 预期 ,同时 由 于 具体 算法 的 不 透明 
性 而 被 指 为 “黑匣子 ”"。 尽 管 如 此 ,根据 本 文 数据 分 
析 , 客 观 而 言 ,RCR 为 论文 影响 力 评价 提供 了 一 个 新 的 
视角 ,丰富 了 学 科 规 范 化 影响 力 指标 ,增加 了 一 个 新 的 
可 操作 性 工具 ,因此 ,在 后 续 人 研究 中 ,需要 不 断 对 其 进 
行 修正 与 优化 ”, 并 将 其 移植 到 其 它 学 科 中 ,特别 是 
应 用 到 交叉 学 科 论文 影响 力 评价 中 。 同 时 ,应 铭记 了 
Braun 的 忠告 ”在 大 多 数 情 形 下 ,基于 不 同 指标 的 评 
佑 可 能 会 导致 结果 的 差异 ,这 一 事实 再 次 强调 了 多 维 
度 .多 指标 思考 的 必要 性 ”, 因 此 表明 科学 评价 中 多 指 
标 互 补 的 重要 性 ” 。 那 么 ,鉴于 跨 学 科 评 价 是 促进 交 
叉 学 科研 究 创新 发 展 的 重要 环节 ,以 RCR 为 导向 和 借 
鉴 ,将 对 我 国 推进 学 科 交 叉 融 合 、 优 化 学 科 布 局 .形成 
新 的 学 科 增 长 点 和 新 的 研究 范式 具有 重要 意义 ” 。 
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Research Field Identification by Co-Citation Network 
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Abstract: | Purpose/significance | To investigate field-normalized reference influence indicators on the level of 
papers, the effectiveness of a citation evaluation method (Relative Citation Ratio, RCR) based on the research field 
identification by co-citation network is analyzed. | Method/process | In order to test the effectiveness of RCR in the 
evaluation of academic impact, the paper chose iCite, F1000, InCites, then took 739 604 articles as a sample, and 
analyzed the correlation among RCR, Category Normalized Citation Impact (CNCI) and journal impact factor (JIF) 
by the R language. | Result/conclusion | The paper shows that RCR strongly correlates with CNCI, and poorly cor- 
relates with journal impact factor, which indicate the similarities and differences between RCR and CNCI and confirm 
that it is a good practice for implementing San Francisco Declaration on Research Assessment and assessing research 
on its own merits rather than on the basis of the journal in which the research is published. It also turns out the in- 
verse relationship of the correlation and the number of interdisciplinary subjects between RCR and journal impact fac- 
tor in interdisciplinary science, and lower correlation between RCR and journal impact factor than in a single disci- 
pline, which appears the applicability and effectiveness of RCR in evaluating the influence of academic papers in in- 
terdisciplinary science. The paper concludes that RCR based on research field identification by co-citation network 
provides new solution for the evaluation of paper influence, especially for interdisciplinary research outputs. 
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